Phép thử Turing dựa trên giả thiết rằng người ta có thể đánh giá tính "thông minh" của máy tính bằng cách so sánh hành vi của nó với hành vi của con người. Câu hỏi đặt ra là: kết quả của phép thử có thể phản ánh thực tế, trong khi chỉ xem xét tới hành vi và so sánh với hành vi con người? Vì lý do này và những lý do khác, các nhà nghiên cứu trí tuệ nhân tạo đã đặt câu hỏi về tính hữu dụng của phép thử. Trong thực tế, kết quả của thử nghiệm có thể dễ dàng bị chi phối không phải bởi tính thông minh của máy tính, mà do kỹ năng, thái độ hoặc sự ngây thơ của người hỏi.